導(dǎo)讀:原文如下:對百度,CTO劉建國的采訪過程就是一個(gè)擠牙膏的過程,他永遠(yuǎn)不會(huì)借題發(fā)揮,對采訪者的問題,回復(fù)得簡練而專注。這位與李彥宏一起創(chuàng)立百度的“技術(shù)新官僚”,對搜索引擎技術(shù)運(yùn)
發(fā)表日期:2020-07-08
文章編輯:興田科技
瀏覽次數(shù):9173
標(biāo)簽:
原文如下:
對百度,CTO劉建國的采訪過程就是一個(gè)擠牙膏的過程,他永遠(yuǎn)不會(huì)借題發(fā)揮,對采訪者的問題,回復(fù)得簡練而專注。這位與李彥宏一起創(chuàng)立百度的“技術(shù)新官僚”,對搜索引擎技術(shù)運(yùn)用的思考,在一定程度上體現(xiàn)了這個(gè)新上市公司的商業(yè)方向及這個(gè)團(tuán)隊(duì)的技術(shù)想象力。采訪中,劉建國不斷接到要求解封的“作弊網(wǎng)站”的電話,大多是熟人才會(huì)直接將電話打到他這里,或是打給李彥宏。采訪由此而展開。
反作弊是我們的技術(shù)
《21世紀(jì)》:李彥宏選擇搜索引擎作為百度的主業(yè),當(dāng)時(shí)是怎么確定的?
劉建國:2000年之前,中國有許多搜索引擎公司,Goyoyo是香港一個(gè)公司做的;科學(xué)院有一個(gè)網(wǎng)站,還有北大天網(wǎng)。當(dāng)時(shí)創(chuàng)立公司時(shí)搜索引擎已經(jīng)很多了。我們機(jī)會(huì)在哪里?在當(dāng)時(shí)我和李彥宏的通信中,他說要做就做最好的。當(dāng)時(shí)已有的搜索引擎速度慢,索引小,用戶體驗(yàn)很差。我們都認(rèn)為做一個(gè)中文搜索引擎有很大前景,所以我就從北大出來,跟李彥宏一起創(chuàng)業(yè)了。
《21世紀(jì)》:現(xiàn)在來看,當(dāng)時(shí)搜索的核心技術(shù)是什么?
劉建國:分成好幾塊,一塊是網(wǎng)頁抓取,由蜘蛛程序選擇、抓取互聯(lián)網(wǎng)中的網(wǎng)頁,還要持續(xù)不斷地更新網(wǎng)頁,將過期的網(wǎng)頁剔除掉;二是超鏈分析和內(nèi)容分析;三是針對用戶的搜索服務(wù):如何處理海量數(shù)據(jù)和大規(guī)模的用戶訪問?如何提供穩(wěn)定的服務(wù)?有很多技術(shù)問題需要解決。
《21世紀(jì)》:你們是一幫人在做?
劉建國:好多個(gè)組,重點(diǎn)是相關(guān)性的評價(jià)。哪些網(wǎng)頁是用戶想要的?后面就有好多技術(shù);比如超鏈分析;這里有李彥宏的專利。超鏈在Infoseek之前就有成熟的技術(shù),李彥宏在那兒工作時(shí)就研究得很細(xì),但我們沒有僅用這套方法,而是根據(jù)當(dāng)時(shí)搜索引擎全球的發(fā)展做了改進(jìn)。
《21世紀(jì)》:百度在相關(guān)性方面有什么特色?
劉建國:有兩個(gè)基本方面:超鏈分析和內(nèi)容分析。我們這幫技術(shù)人員,包括李彥宏,根據(jù)搜索引擎當(dāng)時(shí)的技術(shù)發(fā)展,做出了一套百度自己的超鏈分析系統(tǒng)。另外還得分析網(wǎng)頁內(nèi)容,比如中文處理就很重要,要理解中文的語法和特定文字意義,因?yàn)橹形呐c英文還是不一樣的,只有判斷文字是什么意思,才能給用戶提供搜索結(jié)果。
《21世紀(jì)》:“欺騙搜索”是什么意思?你們有什么獨(dú)特的技術(shù)來對付它?
劉建國:就是所謂的網(wǎng)絡(luò)優(yōu)化,比如SEO之類,鏈接一些域名,好象鏈接很多,但實(shí)際上是人為做出來的。還有一些鏈接,就是專門幫別人做鏈接,這也是超鏈分析。你不是鏈接分析嗎?專門針對你。還有一些網(wǎng)站,專門給別人做,相關(guān)度也高,我們必須發(fā)現(xiàn)哪些是LINKFORM,然后分析出來。
《21世紀(jì)》:這如何看得出來?有簡單工具嗎?
劉建國:我們已經(jīng)可以通過技術(shù)手段及時(shí)發(fā)現(xiàn)這種欺騙或者叫作弊。是否作弊,有一個(gè)很簡單的標(biāo)準(zhǔn):用戶看到的內(nèi)容和搜索引擎看到的內(nèi)容是否一致?前一段搜索“芙蓉姐姐”,進(jìn)去之后很多是買手機(jī)的,買其他信息,這就是作弊。我們就分析,他們是通過什么方法來“欺騙搜索”。比如LINKFARM,我們靠技術(shù)發(fā)現(xiàn)出來,它已經(jīng)“堆砌關(guān)鍵詞”了,我們看出它是作弊的,我就不要它。這就是為何后來反彈這么大,有了“反百度聯(lián)盟”的原因。有“反百度聯(lián)盟”成員說,你為什么屏蔽我?前一段搜狐網(wǎng)的一個(gè)峰會(huì),一個(gè)醫(yī)藥網(wǎng)的說我們很好啊,你為什么把我給封了?它的“堆砌”是作弊的,如果我們把它放開,對用戶是一種欺騙。
《21世紀(jì)》:比如在百度搜“芙蓉姐姐”,你們把有些“芙蓉姐姐”鏈接給屏蔽了,那就不能給用戶提供更多的結(jié)果了?
劉建國:是更準(zhǔn)確,比如用戶到這里來搜,得到的是真正的“芙蓉姐姐”而不是手機(jī)鈴聲。這樣做的目的是給用戶很好的用戶體驗(yàn)。
《21世紀(jì)》:在反作弊技術(shù)里,有什么可以明確識(shí)別作弊?
劉建國:比如,來回互相鏈接、堆砌關(guān)鍵詞等。還有前景色和背景色完全一致,在HTML里面,用戶看不見,可以騙搜索引擎,就這樣騙用戶。
《21世紀(jì)》:僅僅背景色也可以用來作弊?
劉建國:背景是黑色的,搜索看見的僅僅是內(nèi)容,是看不到背景的。前景與后景一樣,機(jī)器看不著,人能看出來,景色也是識(shí)別的因素。其中的文字就是有些網(wǎng)站想欺騙的東西。有很多方法作弊,層出不窮的。搜索與作弊網(wǎng)站是永遠(yuǎn)不會(huì)結(jié)束的戰(zhàn)爭。
《21世紀(jì)》:有沒有可以“招安”的作弊網(wǎng)站?
劉建國:不會(huì)的。他們的利益很大,騙一點(diǎn)是一點(diǎn),不會(huì)到這里來做。
《21世紀(jì)》:有多少這樣的網(wǎng)站?
劉建國:每天碰到成千這樣的網(wǎng)站。
《21世紀(jì)》:他們到哪里拉客戶?
劉建國:不一定拉客戶,他們可以自己做鈴聲、短信,SEO會(huì)拉企業(yè),給錢,我給你排位。
另一個(gè)“敵人”是Google嗎?
《21世紀(jì)》:與Google的反作弊比,你們有什么優(yōu)勢?
劉建國:說Google的技術(shù)比我們好,我不認(rèn)同,他們主要是不夠集中。比如反作弊的,Google中文就做不過我們,這有技術(shù)問題,還有人力,要知道作弊慣用的手法,而Google不知道。這個(gè)模式我們比Google發(fā)展得更快,我們更接近用戶。我們中文的理解做得比他們好,比如像分詞、切詞,中文是一個(gè)一個(gè)字,放一塊兒,那些字和詞是不一樣的。我做得比Google好。他們沒有專門研究中文。
《21世紀(jì)》:你們是用自己的技術(shù)?
劉建國:是的。我們中文分詞,這個(gè)技術(shù)里面沒有英文,中文本身的處理我們已經(jīng)到位,還有語法的應(yīng)用,我們做得很好。語法是主謂賓,如何用,老外不理解。
《21世紀(jì)》:你們用以前的文字識(shí)別技術(shù)嗎?
劉建國:對中文我們有一套獨(dú)特的做法,現(xiàn)在成熟的技術(shù)都不太適合我們。
《21世紀(jì)》:有沒有用哪個(gè)平臺(tái)?比如大的軟件?
劉建國:這個(gè)軟件是我們自己做的。
《21世紀(jì)》:是應(yīng)用軟件?
劉建國:不是一套。我們直接用自己的東西。比如說詞典、分詞、詞匯。這不是釋義的詞典,可能有很多資源。比如我們用人民日報(bào)的語料庫,我們購買這樣的資料。更多的平臺(tái)是我們自己的搜索引擎。我們有日志,總結(jié)新的詞匯。我們對10億計(jì)的網(wǎng)頁也能分析。這是Google中文做不到的。至少?zèng)]有聚焦。另外從中文用戶體驗(yàn)來說,我們也做得比他們好,比如用戶體驗(yàn)是什么、習(xí)慣是什么。比如相關(guān)搜索,在中文里面,用戶心里想的一個(gè)事情,比如“軟件”這個(gè)詞,用戶心里想的是軟件下載,但搜索的是“軟件”這個(gè)詞,他輸入“軟件”,與搜索不符。百度會(huì)提示得更加精細(xì)化,到底是軟件下載還是加密,全自動(dòng)服務(wù),這樣用戶會(huì)覺得很好。類似的工作我們下了很多功夫。其他像拼音檢索,錯(cuò)別字糾正,我們也能正確提示。現(xiàn)在有些搜索正在抄我們。我認(rèn)為不能崇洋。
更多新聞
2023
數(shù)據(jù)網(wǎng)站建設(shè) - 助力您的業(yè)務(wù)發(fā)展在當(dāng)今數(shù)字化時(shí)代,互聯(lián)網(wǎng)的快速發(fā)展使得數(shù)據(jù)成為了企業(yè)獲取競爭優(yōu)勢的...
View details
2023
偃師網(wǎng)絡(luò)推廣在今天的數(shù)字化時(shí)代變得不可或缺。通過制定可行的推廣計(jì)劃和選擇合適的工具和策略,企業(yè)可以利用網(wǎng)絡(luò)推廣實(shí)現(xiàn)業(yè)務(wù)增長。然而,要想獲得成功,企業(yè)需要不斷學(xué)習(xí)并及時(shí)調(diào)整策略以適應(yīng)不斷變化的市場需求。偃師網(wǎng)絡(luò)推廣將繼續(xù)為企業(yè)獲得成功和實(shí)現(xiàn)業(yè)務(wù)增長提供重要的支持和機(jī)會(huì)。
View details
2023
什么是建設(shè)網(wǎng)站費(fèi)用?在建設(shè)一個(gè)網(wǎng)站之前,了解和計(jì)劃費(fèi)用是至關(guān)重要的。。建設(shè)網(wǎng)站的費(fèi)用包括網(wǎng)站設(shè)計(jì)、開...
View details
2023
盡管您可以嘗試自己進(jìn)行中山網(wǎng)站優(yōu)化,但考慮到該領(lǐng)域的復(fù)雜性和不斷變化的搜索引擎算法,聘請專業(yè)的中山網(wǎng)站優(yōu)化服務(wù)提供商可能更為明智。他們將根據(jù)您的業(yè)務(wù)需求和目標(biāo)提供個(gè)性化的優(yōu)化策略,并確保您的網(wǎng)站在搜索引擎中獲得良好的排名。
View details